La plateforme d'édition vidéo InVideo a récemment lancé une mise à jour majeure, la version 3.0, qui intègre une fonctionnalité de génération de vidéo à partir de texte basée sur l'intelligence artificielle. Les utilisateurs n'ont qu'à saisir une invite textuelle pour créer des vidéos avec des images réelles, des animations ou un style anime, et peuvent personnaliser le résultat pour différentes plateformes comme YouTube, Instagram Reels et LinkedIn. Bien que cette nouvelle fonctionnalité repose sur des modèles d'IA tiers, les utilisateurs peuvent affiner le résultat en temps réel en ajoutant des invites textuelles.

Le 4 septembre 2024, l'Institut de Recherche sur l'Intelligence Artificielle de Beijing (BAAI) a annoncé le lancement de FlagEval, le premier service d'évaluation comparative de modèles au monde incluant la génération de vidéos à partir de texte. Ce service, accessible aux utilisateurs, couvre environ 40 grands modèles nationaux et internationaux et prend en charge l'évaluation personnalisée en ligne ou hors ligne de quatre tâches : questions-réponses linguistiques, compréhension multimodale d'images et de texte, génération d'images à partir de texte et génération de vidéos à partir de texte.

Nouvelles fraîches ! Gen-3 Alpha Texte vers Vidéo est désormais disponible pour tous ! Il s’agit d’un domaine entièrement nouveau permettant de générer des vidéos de manière haute fidélité, rapide et contrôlable. Rendez-vous dès maintenant sur le site Web http://runwayml.com pour l’essayer ! Cette annonce a suscité un vif intérêt, de nombreuses personnes attendant avec impatience cette nouvelle fonctionnalité.

« Sora présente plusieurs failles critiques et ne peut pas générer parfaitement de contenu vidéo. » « Les données d'entraînement de Sora proviennent de Shutterstock, avec qui OpenAI a conclu un accord de partenariat de données. » « Sora nécessite une énorme puissance de calcul et ne sera pas commercialisée pour le moment. L'objectif est de réduire les besoins en puissance de calcul. » « Sora générera finalement des vidéos avec du son, et la sécurité est un domaine d'attention prioritaire. »

Le modèle Sora révolutionne la génération de vidéos à partir de texte. Son développement a duré près d'un an, explorant plusieurs pistes. Sora utilise l'architecture DiT, dépassant les limites des modèles de diffusion. Qixiaohuan, grâce à la plateforme Lava, collabore avec ByteDance, Xiaomi et Kuaishou pour promouvoir la localisation et l'internationalisation du contenu. Chao Xun Communications, investisseur stratégique de Qixiaohuan, détient 30% de ses parts et est son principal actionnaire.

Le modèle de vidéo à partir de texte Sora a récemment suscité de vives discussions. Des articles de presse ont affirmé que l'un des inventeurs de ce modèle était Xie Saining, un jeune scientifique diplômé de l'Université Jiao Tong de Shanghai. Xie Saining a publié une réponse sur son compte WeChat, démentant tout lien avec Sora et affirmant n'avoir aucun rapport avec ce projet. Il a souligné que, pour un système complexe comme Sora, le facteur le plus important est le capital humain, suivi des données, puis de la puissance de calcul. Il a également ajouté qu'avant la réglementation de l'intelligence artificielle et la maturité de la technologie, la simple génération d'images esthétiques ne suffit pas, la capture de la vérité et le...

{Point 1 : Baidu Wenxin Yiyan a lancé cinq extensions : recherche Baidu, consultation de documents, E Yan Yitu, description d’images et création vidéo à partir de texte. Point 2 : Les extensions de Baidu Wenxin Yiyan permettent au modèle de générer des informations précises en temps réel, des résumés et des réponses à de longs textes, des analyses de données et la création de graphiques, la création et les réponses basées sur des images, ainsi que la création de vidéos à partir de texte. Point 3 : Baidu a déclaré qu’il collaborerait avec les développeurs pour construire un écosystème d’extensions et partager les résultats de l’innovation technologique.}